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As avalia9oes de nova gera^ao nas sociedades contemporaneas 

Simon Schwartzman 

Educacao e avaliacao sempre andaram de maos dadas. O trabalho do 
educador e transformar o estudante naquilo que nao era, desenvolvendo 
competencias e habilidades, inculcando valores e ampliando seus 
conhecimentos. O educador precisa saber sempre se o estudante esta 
aprendendo e se desenvolvendo, e os estudantes se miram no espelho de seus 
mestres para saber se estao de fato progredindo, formando assim sua auto- 
imagem. Esta avaliacao permanente ocorre em muitas atividades humanas, 
que estao sendo sempre sopesadas, de forma implicita ou explicita, em termos 
de sua qualidade, beneficios, custos, beleza ou prazer. O que e peculiar a 
educacao - mas, novamente, nao so a ela - e o desenvolvimento de sistemas 
complexos e sistematizados de avaliacao, e o uso regular de seus resultados 
para diversos fins. A forma que estes sistemas assumem, e o papel que eles 
desempenham, dependem de muitos fatores, que variam de uma epoca a outra, 
e de uma a outra sociedade: suas tradicoes culturais e intelectuais, seu regime 
politico-institutional, e os diferentes papeis que a sociedade atribui e espera da 
educacao, em seus diversos niveis. 

As f undoes tradicionais da educacao: cimento e filtro social 

A funcao mais tradicional da educacao formal, ressaltada por 
sociologos classicos como Emile Durkheim e Talcott Parsons, e de transmitir 
valores e manter a coesao social, necessarios sobretudo nas sociedades 
modernas e complexas. Durkheim, na Franca do initio do seculo XX, 
contrastava as sociedades tradicionais, onde a coesao se daria pela 
similaridade das pessoas (solidarite mecanique) com as sociedades complexas, 
aonde as pessoas se complementariam pela divisao do trabalho social 
{solidarite organique) . O jogo dos interesses individuals, dos contratualistas 
de antes e de hoje, nao lhe parecia suficiente para manter a sociedade coesa. 
Era necessario,alem disto, preservar e transmitir a cultura e dos valores, que 
no passado havia sido o papel da religiao, e que, nas sociedades modernas 
deveria ser fun§ao dos sistemas educacionais. Esta ideia seria retomada 
decadas mais tarde nos Estados Unidos por Talcott Parsons, que atribuia as 
institui§6es educacionais a responsabilidade por uma das quatro fun§6es 
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centrais de qualquer sistema social viavel, a de manutencao de valores e 
padroes de comportamento. ' 

Este tema, do papel da educacao como cimento social, ficou por 
muitos anos fora de moda, superado por outras questoes, como as 
necessidades do mercado de trabalho ou de equidade e justica de acesso. Nos 
ultimos anos, no entanto, o tema tern sido retomado com grande interesse, a 
partir dos estudos e pesquisas sobre a importancia do "capital social", que 
seria a base sem a qual as instituicoes politicas e os mercados nao poderiam 
funcionar (Putnam, Leonardi, and Nanetti 1993; Dasgupta and Serageldin 
2000; Fukuyama and IMF Institute 2000). 

A outra funcao tradicional e classica da educacao e a de filtrar as 
pessoas para posicoes de prestigio e elite, conforme sua maior ou menor 
aderencia aos canones dominantes. O exemplo historico mais famoso talvez 
tenha sido o do Mandarinato chines, em que os literati se preparavam por 
anos, estudando literatura e caligrafia, para um exame que os levaria a uma 
das poucas posicoes de prestigio e poder na burocracia imperial. Nao havia 
relacao clara entre estes estudos e o trabalho que fariam depois. Esta pouca 
relacao entre o conhecimento adquirido e as funcoes a serem desempenhadas 
no trabalho persiste ate hoje, nos sistemas educacionais modernos. Como nos 
esportes ou nas artes, as pessoas nao sao avaliadas, somente, para saber se 
elas conseguem desempenhar de forma adequada suas funcoes, mas, tambem, 
para saber se elas sao melhores ou piores que seus concorrentes . 

Esta funcao de filtragem pode ser bastante perversa, pois da as pessoas 
uma ilusao de mobilidade social que depende do descenso de outras. Dai a 
nocao, popularizada por alguns autores, de que a educacao formal nao passaria 
de um mecanismo de consolidacao e reproducao da ordem estabelecida 
(Bourdieu and Passeron 1970). Na realidade, o fortalecimento dos sistemas de 
merito e a valorizacao da educacao fazem parte de uma profunda revolucao 
que substituiu as formas mais tradicionais de hierarquia e prestigio social 
baseados no sangue e na propriedade da terra por uma nova hierarquia baseada 



1 As outras funcoes seriam as de estabelecimento de objetivos e metas (governo), adaptacao ao 
ambiente (economia) e integracao (justica). As referencias classicas sao (Durkheim 1967);.(Durkheim 
and Halbwachs 1938); (Parsons and Bales 1966); (Parsons 1991) 
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na competencia e no desempenho individual. O fato de que tenha havido 
compromissos e acomodacoes de toda ordem entre as antigas e as novas elites 
nao diminui a importancia desta transformacao. Uma vez implantados os 
sistemas de merito, no entanto, sua perpetuacao pode fazer com que seus 
efeitos perversos adquiram maior relevo. Para os individuos, competir por um 
melhor lugar atraves da educacao pode ser a melhor estrategia, principalmente 
para os que nao sao herdeiros de fortunas e filhos das antigas aristocracias. 
Para a sociedade como um todo, o crescimento sem limites da escolaridade 
formal e das exigencias educacionais podem nao trazer os beneficios que 
freqiientemente se imagina. 2 

As avalia^oes na educacao tradicional 

A implantacao e manutencao destes grandes sistemas de formacao, 
endoutrinacao e filtragem das pessoas, por grandes burocracias piiblicas, nao 
poderia ser feita sem mecanismos que garantissem, de alguma forma, que seus 
objetivos fossem atingidos. Na entrada do seculo XX, a maioria dos paises da 
Europa ocidental, assim como o Japao e a Argentina, ja haviam conseguido 
universalizar a educacao basica, e avancavam a passos rapidos na implantacao 
e universalizacao da educacao secundaria. 

Em todos os paises em que os governos centrais tiveram papel 
preponderante no financiamento e coordenacao da educacao basica e 
fundamental, os sistemas tradicionais de avaliacao por consenso evolufram 
para a busca de padroes nacionais que nao dependessem exclusivamente das 
preferencias e orientacoes subjetivas de cada professor e escola. As 
manifestacoes mais claras desta tendencia foram os exames de conclusao da 
educa§ao secundaria, dos quais o Baccalaureat frances e o Abitur alemao, 
estabelecidos no seculo XIX, sao os exemplos mais conhecidos. Em ambos os 
casos, as provas sao acompanhadas por procedimentos extremamente 
complexos, de juizes e comissoes de professores, que buscam fazer com que 
um determinado conceito dado por uma escola seja equivalente, em conteiido, 
a conceitos equivalentes dados em todas as outras escolas. Estes exames sao a 
culmina§ao de sistemas permanentes de coordena§ao. acompanhamento e 



2 Este ponto e levantado, sobretudo para a educajao superior de massas, em (Wolf 2002).Veja 
tambem, para uma perspectiva controversa, (Herrnstein and Murray 1994). 
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inspecoes das escolas, que procuram garantir nao somente que a qualidade da 
educacao seja mantida, mas que todos os estudantes obtenham o mesmo tipo 
de educacao. Assim, os resultados das provas finais seriam uma expressao 
pura das qualidades de cada individuo, independentemente de sua origem ou 
condicao social, e serviriam para definir suas chances e lugar na hierarquia de 
oportunidades que se abrem aos de melhor desempenho, seja na universidade, 
seja na vida profissional. 3 

Estes sistemas foram concebidos em uma epoca em que poucos 
estudantes chegavam a escola secundaria, e foram sendo flexibilizados na 
medida em que a educacao media ia se expandindo e se diversificando. Hoje, 
na Alemanha, o ensino secundario academico que conduz ao Abitur so e 
freqiientado por cerca de 1/4 dos estudantes, enquanto que a maioria segue 
cursos profissionais e tecnicos de outro tipo. Na Franca, o antigo Bac 
academico se transformou em um sistema diversificado, cada vez mais 
complexo, e de futuro incerto. 

As novas fun^oes da educacao 

Os rigorosos sistemas de controle e certificacao estabelecidos pelos 
paises europeus, propagados depois para suas colonias e areas de influencia e 
adotados por alguns paises da Asia, garantiram a superioridade de sua 
educacao formal sobre a dos demais paises, inclusive em relacao aos Estados 
Unidos, pais aonde o ensino sempre foi fortemente descentralizado, e o setor 
privado sempre teve grande presenca. Alem de transmitir valores e atitudes, 
eles transmitiam tambem os conhecimentos e conteiidos que faziam parte da 
"norma culta" dos respectivos paises, a comecar pelo dominio da linguagem 
escrita e falada. Esta vantagem da educacao tradicional pode ser vista ainda 
hoje nas pesquisas comparadas sobre o desempenho dos estudantes em provas 
de conhecimento em competencias em matematica: como regra geral, quanta 
mais tradicional e formalizado o ensino, melhor o desempenho dos alunos 
(OECD Programme for International Student Assessment 2001). 



3 Para um historico da evolucao dos sistemas piiblicos de avaliacao, veja (The World Bank 
Group 2002). Para uma descricao detalhada dos diferentes sistemas nacionais de conclusao da educacao 
secundaria - sobretudo o Abitur alemao e o Baccalaureat frances, (McLauchlan de Arregui et al. 2001). 
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Ao longo do seculo XX, duas transformacoes profundas ocorreram em 
relacao a educacao. Primeiro, ela continuou se expandindo, chegando a 
universalizacao do acesso ao nivel medio nos paises mais desenvolvidos por 
volta da metade do seculo, e avancando pela extensao crescente da educacao 
superior e da pos-graduacao. Depois, educacao e cultura deixaram de ser 
vistas, simplesmente, uma forma de socializacao nos estilos, formas de vida e 
valores dominantes, e passaram a ser considerados como um fator de producao 
e riqueza. Hoje, com a vulgarizacao da chamada "teoria do capital humano", 
isto parece ser uma coisa 6b via, mas nao o era no passado. 



Evolugao dos sistemas de educagao media e superior 



Sistemas tradicionais 
cobertura da educagao secundaria limitada 



sistemas contemporaneos 

abrangente e com tendencia a 
universalizagao 



conteudos da educagao secundaria homogeneos e orientados para a muito herogeneos, com cursos de 

formagao humanistica e cientivica de formagao cientifica, tecnica, 
tipo academico humanistica, profissional e vocacional 



cobertura da educagao superior 
conteudos da educagao superior 



limitada: cerca de 5% da populagao de massas: 30% ou mais, com 

tendencia a universalizagao 



as profissoes classicas: medicina, 
direito, 



altamente diferenciada: vocacional, 
geral, profissional, cientifica, educagao 
continuada 



A expansao, o aumento dos custos e a relevancia economica cada vez 
evidente da educacao fizeram com que os antigos canones de qualidade e os 
respectivos mecanismos de controle e avaliacao da educacao comecassem ser 
questionados. A quebra dos canones se deu, sobretudo, pelo rompimento da 
barreira que antes parecia dividir com tanta nitidez a educacao academica, das 
elites, da educa§ao tecnica e profissional. A forma§ao buscada pelas escolas e 
universidades tradicionais sempre foi a das profissoes classicas, como o 
direito, a medicina, a teologia e o proprio magisterio, cujos melhores 
estudantes encontrariam posi§6es de prestigio e reconhecimento e as rendas 
decorrentes em fun§ao de sua competencia, sem ter que competir em mercados 
dominados pela busca desavergonhada do lucro. Esta separa§ao e oposi§ao 
entre a forma§ao e o treinamento tecnico e profissional, para o mercado, e a 
educa§ao academica, para as posi§6es de prestigio no governo e na cultura, 
ocorreu por toda parte, e ajudou a prolongar a auto-suficiencia das institui§6es 
educacionais. Na Inglaterra, como na Alemanha, a forma§ao tecnica e 



especializada foram mantidas por muito tempo fora das escolas tradicionais e 
das universidades, localizadas em centros de formacao profissional e 
politecnicos, mantidos muitas vezes pelas proprias industrias e corporacoes 
profissionais. No Brasil, a formacao tecnica e profissional sempre esteve, 
desde os anos 30, dominada pelas instituicoes patronais, enquanto que as 
Secretarias e o Ministerio da Educacao cuidavam (ou deveriam cuidar) da 
educacao geral 

Na medida em que esta separacao entre as pretensoes mais grandiosas 
da cultura tradicional e a realidade da vida pratica da industria e do comercio 
ocorria, as instituicoes educacionais e universitarias comecaram a perder o 
papel central de formacao e filtragem das elites que acreditavam desempenhar. 
Na medida em que as elites se transformavam, com a inclusao crescente de 
pessoas que nao haviam passado pela educacao convencional; na medida em 
que comerciantes, engenheiros, sindicalistas e militares assumiam posicoes de 
elite e de comando, trazendo seus proprios valores e perspectivas, as 
instituicoes educacionais se isolavam, e perdiam os criterios externos de lhes 
serviam como pontos de referenda e de apoio. 

Estas transformacoes, que se deram na Europa ao longo do seculo 
XIX, tiveram impacto profundo nos sistemas educacionais dos diversos paises. 
Na Franca, a revolucao e o regime napoleonico varreram com as universidades 
tradicionais, e entronizaram os engenheiros e as "grandes ecoles" como a nova 
elite do Estado moderno. Na Inglaterra, as escolas e universidades tradicionais 
se mantiveram isoladas, servindo a aristocracia e ao governo, enquanto que a 
burguesia e o mercado desenvolviam suas proprias instituicoes e sistemas de 
ensino; na Alemanha, as universidades se mantiveram, por mais tempo que em 
qualquer outro pais, como instituicoes ligadas ao Estado e formadoras de suas 
elites, ate que, com a Repiiblica de Weimar e o nazismo, o edificio viesse 
abaixo. Nos Estados Unidos, sem tradicao academica, a educa§ao se 
desenvolveu de forma muito mais confusa e misturada, com uma combina§ao 
de valores, atitudes e conteiidos academicos e pragmaticos, publicos e 
privados, de alta e de baixa cultura, que deixariam os europeus escandalizados. 
E por isto, talvez, a educa§ao universitaria americana tenha se tornado muito 
mais dinamica e criativa, a longo prazo, do que na Europa. 



As avalia^oes de nova gera^ao 

Os novos sistemas de avaliacao se desenvolveram principalmente a 
partir dos Estados Unidos, como reacao aos obvios problemas de falta de 
qualidade de muitas de suas instituicoes educacionais, na ausencia de uma 
corporacao profissional de educadores suficientemente estruturada para tomar 
a si estas funcoes, como havia ocorrido na Europa, e com a preocupacao 
crescente com a questao das igualdades de oportunidade, centradas sobretudo 
na questao racial. O marco desta nova linha de trabalhos foi o famoso 
"Coleman Report", de 1966 (Coleman et al. 1966), um grande estudo 
envolvendo 600 mil criancas em 4 mil escolas, feito por solicitacao do 
governo norte-americano para entender o que estava ocorrendo nesta area. O 
relatorio, baseado em analises estatisticas complexas, constatou, entre outras 
coisas, que as diferencas de desempenho dos estudantes nao dependiam 
somente das caracteristicas das escolas, mas, sobretudo, as condicoes socio- 
economicas e culturais em que viviam suas famflias, e que afetavam a 
populacao negra de forma especialmente cruel. 

O relatorio Coleman deu origem a muitos estudos e pesquisa sobre a 
questao educacional, e em 1969, por decisao do Congresso americano, foi 
criado o National Assessment of Educational Progress - NAEP (Avaliacao 
Nacional do Progresso em Educacao), que serviu de modelo para o Sistema de 
Avaliacao da Educacao Basica (SAEB) no Brasil. O NAEP e tambem 
conhecido como o "Boletim Escolar da Nacao", e acompanha a evolucao da 
qualidade da educacao norte-americana nas diferentes regioes e Estados 
(National Assessment Governing Board 2002). 

Alem do problema da igualdade de oportunidades, os americanos se 
deparavam com a questao da qualidade de sua educa§ao. Em 1981 um novo 
documento de grande repercussao foi publicado, "A Nation at Risk", baseado 
em um grande niimero de estudos especialmente encomendados por uma 
comissao de alto nivel, e que culminava em uma serie de recomenda§6es para 
melhorar a educa§ao do pais (United States Department of Education and 
Education 1983) 

As metodologias adotadas sao muito distintas das anteriores, que eram 
baseadas na busca do consenso entre professores sobre conteiidos e criterios 
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de avaliacao. Agora, as opinioes e avaliacoes dos especialistas continuam 
sendo tomadas em conta, mas sao processadas e interpretadas com a ajuda de 
procedimentos estatisticos complexos, manejados por estatisticos, 
psicometristas e sociologos que nao trabalham necessariamente em 
instituicoes educacionais, e sim para orgaos de governo, institutos de pesquisa 
e para as novas agendas de avaliacao. 

As funcoes da avaliacao tambem sao mais amplas do que no passado. 
Antes, as avaliacoes tinham por objetivo certificar se o aluno cumpria os 
requisitos necessarios para ingressar em uma universidade, e, posteriormente, 
em uma das profissoes classicas. Havia a suposicao de que todos os alunos que 
haviam passado pelos sistemas de certificacao como o Abitur ou o Bac tinham 
a mesma qualificacao, dentro de um ambito de variacao dado por suas notas. 
Os professores nao eram avaliados, a nao ser no momento de sua formatura, 
ou quando apresentavam sua teses para bancas ou comites de especialistas. 
Hoje, estas equivalencias nao sao mais aceitas como dadas, e precisam ser 
comprovadas estatisticamente. Antes, as avaliacoes eram sempre dos 
estudantes, individualmente; hoje, busca-se avaliar as instituicoes, o 
desempenho dos professores, os metodos de ensino, os programas 
governamentais de expansao e melhoria da educacao e seu impacto; entender 
os condicionantes sociais dos bons e maus resultados; e identificar 
procedimentos que possam melhorar os resultados. 

A evolu^ao das avaliacoes de conclusao do ensino medio 

Tradicionalmente, estas sao avaliacoes individualizadas, que 
classificam cada estudante, e afetam suas chances de entrar para uma 
universidade ou conseguir um bom trabalho. Neste sentido, elas sao avaliacoes 
de high stakes, no linguajar dos especialistas ("de alto risco", mal traduzindo). 
Seu formato classico e o do Abitur alemao, do Bac frances e de outros exames 
semelhantes existentes, sobretudo na Europa, como a Maturita italiana. Nos 
Estados Unidos, aonde a preocupa§ao com os padroes e a qualidade do ensino 
medio e mais recente, foram desenvolvidas novas metodologias de avalia§ao 
baseadas em testes padronizados. A iniciativa partiu das universidades 
privadas, que sentiram a necessidade de um padrao externo de referenda para 
a sele§ao de seus estudantes, que pudesse ser combinado com seus proprios 
criterios de escolha. Por sua iniciativa, foi criado o College Entrance 



Examination Board, que, a partir de 1926, comecou a desenvolver uma prova 
padronizada de multipla escolha, o Scholastic Aptitude Test (SAT). Esta prova 
tern sido adotada pelo College Board desde 1941, e os resultados obtidos 
desde entao sao considerados como comparaveis atraves dos anos. Em 1947 
foi criado o Educational Testing Service, que administra o SAT, e em 1959 
foi criado um teste semelhante, o American College Test, requerido sobretudo 
pelas universidades public as. 4 

Tanto o SAT como o ACT sao exames que buscam avaliar a 
capacidade dos alunos de se safrem bem em seus cursos universitarios, e nao, 
necessariamente, se eles aprenderam os conteiidos especificos dados nos 
cursos de nivel medio. Sao exames voluntaries, mas requeridos pela maioria 
das instituicoes de nivel superior, como parte de seus processos de selecao de 
alunos. Cerca de dois tercos dos estudantes que terminam a escola secundaria 
nos Estados Unidos fazem um destes testes, que sao solicitados por cerca de 
tres mil instituicoes . 

Estes exames sao consagrados, mas nem por isto deixam de receber 
criticas. Por exemplo: 

Los resultados del SAT han sido socialmente aceptados como el medio que 
permite elegir la institucion de educacion superior donde se ha de estudiar. 
Sin embargo, a partir de los anos setenta, diversas organizaciones de derechos 
civiles y agrupaciones feministas han cuestionado el test porque contiene 
sesgos discriminatorios para grupos etnicos y mujeres. Por otra parte, las 
criticas a las preguntas van en aumento en los medios academicos: (i) los 
items se orientan a "reconocer" informacion y no miden la capacidad para 
"generarla", (ii) existe la paradoja de que la capacidad de escribir en ingles se 
mide sin tener que escribir absolutamente nada, (iii) al existir una sola 
respuesta valida para cada item no hay lugar para elaborar respuestas 
complejas que demuestren habilidades may ores que el simple reconocimiento 
de informacion, (iv) la brevedad del tiempo para resolver tantas preguntas 
concede mas importancia a pensar rapido antes que a pensar profundamente, 
lo que hace que durante la preparation para la prueba se desarrollen 
"artimanas" para descartar las respuestas incorrectas, etcetera. (McLauchlan 
de Arregui et al. 2001), p. 34 (anexo 1). 



4 Estas informacoes, assim como as de outros sistemas de avaliacao da conclusao do ensino 
medio, estao no anexo 1 de (McLauchlan de Arregui et al. 2001). 
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Apesar das criticas 5 , os resultados do SAT, alem de servirem para 
avaliar cada estudante individualmente, servem tambem de criterio para a 
avaliacao de cursos, instituicoes e do sistema educativo como um todo. 
Universidades de maior prestigio e reconhecimento exigem escores mais altos 
no SAT de seus estudantes do que outras, e estes resultados sao piiblicos; 
escolas secundarias utilizam os resultados medios de seus alunos no SAT para 
saber se seu ensino e de alto ou baixo padrao; e os proprio governos podem 
usar os resultados medios da populacao, ou de grupos populacionais 
especificos, para estabelecer politicas de melhoria do desempenho escolar. 
Assim, se determinados grupos sociais obtem resultados sistematicamente 
piores no SAT, como os negros nos Estados Unidos, uma possibilidade seria 
questionar a possivel tendenciosidade do teste em favor da cultura dominante, 
da populacao branca; a outra possibilidade seria aceitar os resultados, e 
trabalhar para identificar as causas das diferencas e supera-las. 

A metodologia norte-americana tern sido adotada por outros paises, 
como o Chile e o Brasil. O Chile, em 1966, eliminou o antigo "bachillerato" 6 
em moldes europeus, e a partir de entao o Conselho Nacional de Reitores 
comecou a implementar uma "Prueba de Aptidud Academica" (PAA), nos 
moldes do SAT, por iniciativa do Conselho de Reitores das Universidades 
Chilenas. Alem de servir como criterio para a selecao dos candidatos as 
universidades, as medias dos PAAs dos alunos admitidos sao utilizadas pelo 
governo como criterio para aferir a qualidade das universidades, e contam 
pontos para a distribuicao de subsidios piiblicos para seu funcionamento. O 
Brasil, desde 1998, vem implementando o Exame Nacional de Ensino Medio 
(ENEM), como exame voluntario e por iniciativa do Instituto Nacional de 
Estudos e Pesquisas Educacionais (INEP), um orgao do Ministerio da 
Educacao. O objetivo e fazer dele um padrao nacional para a admissao de 
estudantes as universidades, e que possa tambem servir de criterio para a 



5 Em 2001, depois de uma forte critica do presidente da Universidade da California, que 
propos que a Universidade abandonasse o SAT em beneficio de testes de conhecimentos especificos, o 
College Board se comprometeu em mudar o teste, para torna-lo mais adequado. Veja a respeito (Gehring 
2001; Beatty, Greenwood, and Linn 1999) 

6 O termo "bachillerato" tem sido usado na America Latina tanto no sentido de uma prova que 
e feita ano final do curso secundario, como no Bac frances, como no sentido de cursos que preparam 
alunos para estes cursos, como Gymnasium alemao. 
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avaliacao das proprias escolas secundarias aonde os alunos se formam. 
Segundo o Ministerio da Educacao, em 2002, 

Os resultados da quinta edicao do Enem consolidam a avaliacao como um importante 
instrumento para a reforma do ensino medio no Brasil. O Exame contou com a participacao de 1,3 
milhao de jovens do total de 1 ,8 milhao que havia se inscrito. Desse total, 87% foram beneficiados com a 
isencao da taxa de inscricao. Ate o momento, 384 instituicoes de ensino superior, das quais 44 piiblicas, 
utilizam o Enem nos seus processos seletivos aos cursos de graduacao. (Brasil Ministerio da Educacao 
and Instituto Nacional de Estudos e Pesquisas Educacionais 2002). 

Finalmente, os exames de conclusao do ensino medio funcionam como 
uma "identidade internacional de competencia" cuja importancia cresce a 
medida em que a circulacao internacional de estudantes tambem aumenta. O 
SAT americano e oferecido em todo o mundo para quern se disponha a pagar, 
e seus resultados sao reconhecidos por instituicoes americanas e de outros 
paises. O Abitur e o Bac frances sao reconhecidos internacionalmente, e existe 
um International Baccalaureate coordenado por uma fundacao suica que e 
dado por mais de mil instituicoes em todo o mundo - nao so os exames, mas 
sobretudo os cursos que conduzem a ele. Os resultados do ENEM brasileiro 
ainda nao tern reconhecimento claro, mas e provavel que sua importancia 
aumente cada vez mais, como indicador de desempenhos dos alunos que 
completam a educacao secundaria em qualquer parte do pais. Assim, apesar 
das criticas que se possam fazer a estes sistemas de avaliacao, a tendencia e 
que eles continuem a existir e a se aperfeicoar, como exigencia de um mundo 
integrado onde a competencia, e seu reconhecimento, jogam um papel cada 
vez mais central. 

As avalia^oes da educacao basica 

Na educa§ao basica, os estudantes sao avaliados regularmente pelos 
seus profes sores, e, no final de cada ano letivo, correm o risco de serem 
aprovados ou nao, e, no final do curso, receberem ou nao seus diplomas. Ao 
lado destas avalia§6es tradicionais, existem agora os procedimentos 
sistematicos e controlados de avalia§ao da educa§ao basica em seu conjunto, 
para paises e regioes, nos moldes do NAEP americano e do SAEB brasileiro, 
ja mencionados. O principal objetivo destas avalia§6es nao e a certifica§ao dos 
alunos, como no caso das de nivel secundario, mas das proprias institui§6es. 
Neste sentido, elas sao avalia§6es de baixo risco {low stakes) para os alunos, 
mas podem ser de alto risco para redes escolares, escolas isoladas, seus 
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dirigentes e professores, ja que conduzem a um veredicto a respeito de seu 
desempenho, que pode ter conseqiiencias importantes. 

O ponto de partida destas avaliacoes e o "National Assessment of 
Educational Progress" americano, NAEP. Conforme sua descricao oficial, 

Since 1969 the National Assessment of Educational Progress (NAEP) has 
been regularly conducting assessments of samples of the nation's students 
attending public and private schools at the elementary, junior high, and high 
school levels. NAEP's goal, since its inception, has been to make available 
reliable information about the academic performance of American students in 
various learning areas. To this end, NAEP has produced more than 200 
reports in 11 instructional areas. Teachers, administrators, and researchers 
from across America have helped propel NAEP into the valuable 
informational source it is today. As a result, members of the educational 
community are able to make use of NAEP's findings on students' learning 
experiences to inform policymakers and to improve students' educational 
experiences. NAEP is an indicator of what students know and can do. Only 
group statistics are reported, no individual student or teacher data are ever 
released. 

O Sistema de Avaliacao da Educacao Basica do Brasil (SAEB) segue a 
metodologia do NAEP, e tambem produz resultados para cada Estado do pais, 
sem, no entanto, proporcionar informacoes mais detalhadas por regioes, 
municipios, escolas e muito menos alunos. Ele permite dizer se os alunos de 
um Estado estao, na media, se saindo melhor do que os de outra parte, e, na 
medida em que os dados sao comparaveis de ano a ano, permite dizer se cada 
estado, e o pais como um todo, estao fazendo progresso. Alem de uma 
informacao tecnica, este dado, ao ser divulgado, cria uma pressao politica 
sobre as autoridades educacionais dos Estados, para que busquem resultados 
mais satisfatorios. 

Alem de ordenar os Estados ao longo de uma escala de desempenho, o 

SAEB permite relacionar determinados niveis de conhecimento com 

determinados conteiidos. Assim, o relatorio do SAEB de 2001 mostra que "a 

media dos alunos brasileiros da 8 a serie do ensino fundamental em Lingua 

Portuguesa era 235, localizada no Nivel 4 da escala de desempenho. Nesse 

nivel, estao posicionados cerca de 36% dos alunos avaliados pelo Saeb 2001 

nessa serie e disciplina." E diz mais adiante: 
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Seria desejavel que um maior percentual de alunos se concentrasse nos niveis 
seguintes da escala, especialmente no Nivel 5, no qual se localizam cerca de 
28% dos alunos, e no Nivel 6, em que estao localizados aproximadamente 
10% dos alunos. Cumpre destacar que apenas neste ultimo nivel os alunos 
adquirem a competencia para operar com textos mais complexos, 
identificando o tema e os sentidos metaforicos em textos narrativos longos, 
como contos. 

O SAEB permite ainda buscar correlacoes entre os resultados dos 
exames e as caractensticas das escolas e dos alunos, gracas a informacSes 
colhidas atraves de questionarios que acompanham os exames. A analise 
destas informacSes permite aprofundar o entendimento sobre fatores de ordem 
social ou institucional que afetam o desempenho dos estudantes, servindo de 
base, portanto, para polfticas de melhoria de qualidade mais focalizada. 

A extensao natural desta metodologia seria proporcionar informacoes 
sobre o desempenho de cada escola e mesmo de cada estudante, de tal forma 
que os problemas e as deficiencias existentes pudessem ser localizadas com 
precisao. Alguns Estados brasileiros, como Parana, Sao Paulo Bahia e Minas 
Gerais, desenvolveram seus proprios sistemas de avaliacao, que proporcionam 
informacoes sobre cada escola, ou a maior parte delas. No Parana, desde 2001 , 
estas informacoes sao consolidadas em um "Boletim da Escola", que e 
distribuido as autoridades escolares, professores e pais dos alunos de cada 
escola, com a esperanca de que isto os motive a pressionar e trabalhar por 
melhores resultados. Na Bahia, deu-se inicio a um programa continuo de 
avaliacao do desempenho dos alunos ao longo do ano, que pudesse permitir 
intervencSes em tempo real, para corrigir deficiencias e problemas antes que 
eles se cristalizem. Nos Estados Unidos, a criacao de standards nacionais de 
desempenho e de testes padronizados para os alunos que concluem a educacao 
basica tern sido objeto de varios experimentos e intensa discussao. 

As criticas e discus soes que circundam o NAEP, o SAEB e suas 
derivacoes sao semelhantes as que afetam ao SAT 7 . Provas quantitativas nao 



7 A respeito, o Programa de Promocao da Reforma Educativa para a America Latina e o Caribe 
(PREAL) e o Grupo de Estudios del Desarrollo do Peru mantem um grupo de trabalho e discussao 
permanente sobre o tema dos estandares e avaliacao da educacao, que pode ser acessado pela Internet em 
http://www.grade.org.pe/gtee-preal/gteepreal.htm . 
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permitiriam medir os aspectos mais qualitativos da educacao e da 
aprendizagem; fariam com que os estudantes se preparassem para a prova, e 
nao para realmente aprender; as provas seriam tendenciosas, produzindo 
resultados sistematicamente piores para minorias culturais, lingiiisticas ou 
raciais; elas sobrecarregariam as escolas com testes sucessivos, sem nenhum 
beneficio pedagogico para os estudantes. Alem destas questoes tecnicas, cujo 
merito nao caberia examinar aqui, estes exames trazem um forte componente 
politico, na medida em que a avaliacao das escolas e transferida das maos dos 
professores e funcionarios das secretarias de educacao, em geral educadores e 
pedagogos, para especialistas em estatistica e psicometria, gerando politicas 
gestadas fora das escolas, que podem afetar seus destinos. 

Alem de sua extensao e detalhamento para dentro dos paises e regioes, 
estes exames estao sendo tambem aplicados a nivel internacional, por 
iniciativas de agendas como a Organizacao para a Cooperacao Economica e o 
Desenvolvimento (OECD) e a UNESCO (OECD Programme for International 
Student Assessment 2001). Estas comparacoes mostram profundas diferencas 
de resultados, muitas vezes surpreendentes e incompativeis com o nivel de 
renda e desenvolvimento dos paises, permitindo, em principio, mostrando que 
a qualidade da educacao nao depende somente de recursos, mas de 
caracteristicas institucionais, pedagogicas e culturais dos paises, que precisam 
ser melhor compreendidas . 

A avaliacao do ensino superior e da pos-gradua^ao. 

As universidades sempre se debateram entre os polos da autonomia e 
do controle externo. Como instituicoes responsaveis pela cria§ao e transmissao 
das formas mais complexas de conhecimento e cultura, organizadas e 
desenvolvidas na tradi§ao das corpora§6es medievais, as universidades 
gostam de se ver e ser consideradas como institui§6es autonomas, auto- 
reguladas, que nao teriam como ser controladas e supervisionadas por pessoas 
e institui§6es que sao, por defini§ao, menos capazes e competentes do que elas 
mesmas. Por outro lado, desde seus primordios, as universidades foram 
provedoras de servi§os, e como tais deviam render contas a seus clientes, os 
estudantes, pela qualidade dos servi§os que proporcionavam. Elas tambem 
desempenhavam fun§6es piiblicas, ao formar e certificar os medicos, prelados 
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e juristas, cujo exercicio profissional dependia da regulacao e controle do 
Estado, da Igreja e da corporacoes profissionais. 

Estes tres grandes condicionantes definem os vertices do que ficou 
conhecido na literatura como o "triangulo de Clark", o espaco de poder e 
autoridade criado pela corporacao, pelo Estado e pelas demandas de mercado, 
dentro do qual as instituicoes universitarias se situam. A estes tres polos ha 
que acrescentar um quarto, de grande importancia na historia da America 
Latina, que e a politica (Clark 1983). Basta olharmos em volta para vermos 
como este espaco se constitui, e como as instituicoes tratam de se colocar da 
melhor maneira possivel em seu interior: as universidades piiblicas, 
governadas pelos seus Conselhos, Departamentos e Congregacoes; as 
universidades privadas, buscando responder da melhor forma possivel as 
demandas do mercado; o Ministerio da Educacao, tentando controlar os 
orcamentos, estabelecer criterios de qualidade, e regular a expansao; os 
partidos politicos e a sociedade, demandando por mais acesso, mais equidade, 
mais recursos publicos, e menos custos privados. Nenhuma instituicao e imune 
a estas tres influencias, todas tern que responder, de alguma forma, as pressoes 
e regulacoes dos governos, dos mercados, da politica e de sua propria 
comunidade. 

Quando o ensino superior se restringia dois ou tres por cento da 
populacao, o vertice corporativo geralmente predominava, em diferentes 
formas de cooperacao e entendimento com as burocracias governamentais. 
Com o ensino superior de massas, atendendo a proporcoes que vao de quinze 
por cento a mais da metade da juventude, os custos do ensino superior 
aumentam, as expectativas da sociedade e dos movimentos sociais sobre seus 
resultados se intensificam, os mecanismos tradicionais de coordenacao e 
supervisao burocratica e corporativa ja nao funcionam, e as pressoes por 
avaliacoes externas, transparentes e sistematicas aumentam. Os estudantes 
querem saber quais sao os bons cursos e as boas universidades, para poderem 
decidir melhor sobre seu futuro; os governos, pressionados por custos 
crescentes, querem saber porque um estudante de engenharia na universidade 
"a" custa tres vezes mais do que na universidade "b"; os politicos gostariam de 
usar os recursos das universidades para outros projetos de sua preferencia; os 
professores do ensino medio nao entendem porque ganham tao menos do que 
os da universidade; empresarios vislumbram grandes negocios na "indiistria 
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do conhecimento", e se opoem as reservas de mercado e controles burocraticos 
que limitem suas atividades (Altbach 1999); conselhos de medicina, direito e 
engenharia se preocupam com a expansao desregulada de seus mercados de 
trabalho, e a proliferacao de "fabricas de diplomas"; organizacoes nao 
governamentais de minorias demandam quotas para seus piiblicos, e politicos 
das regioes mais pobres se queixam de que os recursos estao concentrados nas 
regioes mais ricas. 

Alem desta confluencia de interesses e pressoes contrapostos, as 
instituicoes de ensino superior tern funcoes mais gerais, de interesse da 
sociedade como um todo, sobre as quais os governos devem zelar: a formacao 
de tecnicos e especialistas bem qualificados, a pesquisa academica e aplicada, 
a formacao pos-secundaria de massas, a educacao continuada. Nem todas as 
instituicoes podem fazer igualmente todas estas coisas, todas elas custam 
dinheiro, e podem beneficiar a determinados grupos em relacao a outros 
(Castro and Levy 2000) 

A tudo isto se acrescenta uma nova dimensao, que e a 
internacionalizacao crescente da educacao superior. Nao se trata, a rigor, de 
uma novidade, porque as universidades sao, desde os tempos medievais, 
instituicoes que transbordam as fronteiras dos paises, quer no recrutamento de 
seus alunos, quer na contratacao de seus professores, quer na influencia que 
exercem, alem de suas fronteiras nacionais. Mas, na entrada do terceiro 
milenio, a internacionalizacao se torna cada vez mais intensa. Estudantes, 
universidades, empresas e governos precisam saber se um diploma de medico 
ou de economista dado no Brasil vale o mesmo do que um outro dado em 
Portugal ou nos Estados Unidos; universidades e empresas estabelecem 
campus avancados em outros paises, e gostariam de ter seus diplomas 
reconhecidos; cursos a distancia e semi-presenciais, dados por instituicoes 
privadas ou piiblicas, nao respeitam fronteiras, e disputam espa§o com 
institui§6es nacionais. 

Muitos mecanismos tern sido propostos para responder a esta 
pluralidade de demandas e pressoes, alguns mais bem sucedidos que os outros. 
O mais conhecido, talvez, seja o sistema de avalia§ao e acompanhamento do 
desempenho das universidades inglesas, criado na epoca do governo Thatcher, 
e que ainda hoje vigora naquele pais (Williams 1997). As universidades 
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passaram a ser submetidas a avaliacoes quantitativas permanentes, tanto de 
seus custos quanta de seu desempenho; foram forcadas a competir por 
recursos piiblicos e privados; e tiveram que alterar seus sistemas de gestao, 
aproximando-se cada vez mais as formas gerenciais do setor privado. Esta 
experiencia foi marcada por um clima fortemente anti-academico e contra o 
setor publico que prevalecia na Inglaterra naqueles anos, e tern sido ate hoje 
questionada pelo seu impacto negativo sobre a autonomia e a liberdade 
academica. Ao mesmo tempo, permitiu, ou foi acompanhada, de uma forte 
expansao do acesso a educacao superior na Inglaterra, e da eliminacao do 
antigo sistema "binario" que separava as universidades das escolas 
politecnicas naquele pais. Em sua avaliacao, Gareth Williams mostra que, 
gracas a reforma, o custo por estudante na Inglaterra caiu dramaticamente, 
sendo hoje 40% do que era vinte anos atras em termos reais. Ao mesmo 
tempo, o acesso ao ensino superior cresceu, e a qualidade da pesquisa e do 
ensino parecem ter melhorado. Por outro lado, as atividades burocraticas dos 
professores ingleses ocupam hoje muito de seu tempo, e os salarios nao 
melhoram, criando serios problemas de perda dos melhores talentos para o 
setor privado ou para as universidades americanas. 

A experiencia inglesa tern tido um impacto muito grande em todo o 
mundo, com varias tentativas mais ou menos bem sucedidas de copia ou 
adaptacao. 8 Os Estados Unidos tern uma tradicao de avaliacao bastante 
diferente. Sua base sao um conjunto de agendas de acreditacao das 
universidades, estabelecidas por elas mesmas atraves de consorcios, que 
realizam visitas periodicas as instituicoes, e avalizam seu status academico e 
sua qualidade. 9 Alem disto, existe nos Estados Unidos toda uma industria 
privada de avaliacoes "reputacionais", feita por empresas privadas atraves de 
questionarios e entre vistas com diferentes setores. Estas avaliacoes classificam 
as instituicoes de nivel superior segundo uma serie de criterios, da qualidade 



8 O exemplo mais significativo na America Latina e o do Chile, com a reforma introduzida 
durante o regime Pinochet, que foi mantida com poucas alteracoes pelos governos da "concertacion" que 
o sucederam. A reforma na Holanda parece ter sido mais bem sucedida do que na Inglaterra, gracas a 
participacao mais ativa da comunidade academica em sua implementacao. Veja, para o Chile, (Brunner 
1997); para a Holanda, (Vught 1997). 

9 Sobre o sistema americano, (El-Khawas 1998). No initio do seculo XX, o ensino medico 
americano, ate entao desregulado e caotico, passou por uma profunda avaliacao, que teve como 
consequencia implantar um forte padrao de qualidade, e restringir sua expansao. Veja a respeito (Flexner 
1968); e (Schwartzman 1993). 
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da pesquisa a qualidade da cerveja, s sao consumidas pelos milhoes de 
estudantes que entram no ensino superior a cada ano. 

No Brasil, durante muito tempo, a linica avaliacao disponivel sobre os 
cursos superiores no Brasil era feita anualmente pela revista Playboy. A 
necessidade de um sistema moderno de avaliacao sistematica do ensino 
superior tern sido levantada desde, pelo menos, os trabalhos da Comissao 
Nacional de Avaliacao do Ensino Superior de 1985 (Brasil Ministerio da 
Educacao 1985), e deu origem a uma serie de iniciativas desde entao (Paul, 
Ribeiro, and Pillati 1992), ate culminar nos procedimentos adotados pelo 
Ministerio da Educacao na gestao de Paulo Renato de Souza, em duas partes 
principals. A primeira, bastante tradicional, e a chamada "avaliacao das 
condicoes de oferta", em que comissoes de professores visitam os 
estabelecimentos e emitem juizo sobre os recursos humanos e fisicos de que os 
cursos dispoem; a segunda, bastante pioneira, e o Exame Nacional de Cursos, 
conhecido como "Provao", que consiste em um exame padronizado aplicado 
aos alunos que concluem os cursos superiores em todo o pais em diferentes 
areas de conhecimento. 

Apesar de ser uma prova individual, o provao nao e utilizado para 
certificar o aluno, e sim para avaliar os cursos, pela media do desempenho de 
seus formados. Este sistema tern alguns problemas conhecidos, como o de 
impor um padrao linico a todas as instituicoes; o de informar somente a 
distribuicao estatistica dos conceitos, sem definir padroes minimos de 
qualidade; e o de nao medir o "valor agregado" dos cursos, e sim os resultados 
absolutos, que podem estar fortemente influenciados pelas condicoes previas 
dos alunos, favorecendo assim as instituicoes de elite. Alem disto, nao existem 
praticamente conseqiiencias para os cursos que sao mal avaliados. Apesar 
disto, o "provao" gerou um clima de discussao e preocupacao com a qualidade 
da educacao superior que os antigos procedimentos burocraticos e 
administrativos de avalia§ao e credenciamento de cursos nao conseguiam 
produzir, e ja come§am a influenciar as escolhas dos estudantes. 

Finalmente, o Brasil possui tambem um sistema bastante original e 
bem estabelecido de avalia§ao de seus cursos de pos-gradua§ao. Na Europa e 
nos Estados Unidos, a pos-gradua§ao e avaliada seja como parte das 
avalia§6es das institui§6es como um todo, seja por pesquisas reputacionais, ou 
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pela avaliacao do desempenho cientifico e academico de seus professares e 
pesquisadores. No Brasil, a pos-graduacao foi implantada muito rapidamente, 
a partir da reforma universitaria de 1968, e os mecanismos tradicionais e 
autorizacao de cursos atraves do Conselho Federal de Educacao nao 
conseguiam acompanhar seu crescimento. O sistema estabelecido a partir da 
decada de 70, e em vigencia ate hoje, consistiu na criacao de comites de 
especialistas que fazem avaliacoes qualitativas de cada curso ou programa, 
trabalhando a partir de indicadores quantitativos como niimero de alunos 
formados, qualificacao dos docentes e qualidade e quantidade da pesquisa 
cientifica e tecnologica produzidas (Castro and Soares 1986). 

Estas avaliacoes se tornaram necessarias pela proliferacao dos cursos 
de pos-graduacao no pais, que ocorreu como resposta as exigencias de 
credenciais academicas criadas pelo governo federal para os professores 
universitarios. Ao contrario do que ocorre com as avaliacoes da educacao 
superior, as avaliacoes da CAPES tern conseqiiencias importantes para os 
cursos, nao so pelo prestigio associado a seus conceitos, mas tambem pelos 
recursos que sao distribuidos em funcao destes conceitos. 

Conclusao: o presente e o futuro das avaliacoes 

As avaliacoes de nova geracao que surgiram em todo o mundo nas 
ultimas decadas sao tentativas mais ou menos bem sucedidas de responder a 
problemas reais, e deverao continuar a existir, apesar de seus eventuais 
problemas e dificuldades. Nao e que as avalia§6es consigam atender a todas as 
questoes que preocupam; mas os problemas associados as avalia§6es parecem 
ser claramente preferiveis aos problemas associados a sua nao existencia, 
como a falta de parametros, a ausencia de criterios, os desperdicios e injusti§as 
na distribui§ao de recursos, e a impossibilidade de estabelecer politicas 
consistentes para sistemas de educa§ao de massas. Dos problemas existentes, 
muitos sao de natureza tecnica, e podem ir sendo superados na medida em que 
os estudos, as pesquisas e as metodologias de avalia§ao se desenvolvam. 
Assim, por exemplo, a critica costumeira de que as medidas "quantitativas" 
nao teriam como avaliar aspectos qualitativos da educa§ao, como a capacidade 
de leitura e escrita, pode ser superada com instrumentos bem feitos e 
calibrados; e ja existem sistemas computadorizados capazes de avaliar textos 
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em larga escala e de forma mais consistente, confiavel do que o que fariam 
avaliadores e carne e osso. 

Mas a mensuracao do desempenho e so uma das funcoes da avaliacao 
educacional. Desde o Coleman Report, as avaliacoes servem tambem como 
instrumento para identificar os fatores que afetam o desempenho escolar, e 
para avaliar o resultado ou fracasso das politicas educacionais. Por exemplo, 
as avaliacoes tern permitido medir, com precisao, o peso relativo das 
condicoes de vida das famflias dos estudantes, do funcionamento das escolas e 
do trabalho dos professores nos resultados obtidos. Estas analises tern 
mostrado, por exemplo, como e importante que a famflia se envolva na vida 
escolar dos estudantes; o papel negativo da burocratizacao da administracao 
escolar; e os efeitos pedagogicos das diferentes orientacoes e niveis de 
formacao dos professores. 

As grandes controversias associadas a estas avaliacoes tern menos a 
ver com suas dificuldades tecnicas do que com suas conseqiiencias e 
implicacoes politicas. As avaliacoes de nova geracao reduzem o poder e a 
autoridade dos educadores, colocando em seu lugar uma nova geracao de 
especialistas com outro tipo de cultura e informacao. Os resultados das 
avaliacoes podem afetar situacoes estabelecidas de poder e estabilidade 
institucional, ameacando carreiras, e transferindo recursos de determinadas 
instituicoes para outras. Elas criam, necessariamente, um ambiente 
competitive entre pessoas e instituicoes, que podem gerar ansiedade. E podem 
tambem, com facilidade, criar um novo tipo de burocracia capaz de gerar 
grandes custos e sofrimento para as instituicoes educacionais e seus 
participantes, sem necessariamente produzir os resultados beneficos que os 
defensores das avaliacoes pretendem ou apregoam. 

Nao ha solucoes faceis para estes problemas, mas e bastante claro que 
as avalia§6es, e os avaliadores, nao podem se eligir em donos absolutos de 
uma nova verdade, em substitui§ao a autoridade dos pedagogos e academicos 
do passado. As avalia§oes precisam ser constantemente avaliadas, e para isto 
alguns ingredientes sao essenciais. Suas metodologias precisam se tornar 
explicitas, sem se esconder por traz do jargao especializado de estatisticos e 
psicometristas. A area academica de estudo e pesquisas sobre os temas e 
metodologias de avalia§ao precisa ser ampliada e fortalecida, abrindo espa§o 
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para perspectivas distintas e concorrentes. Os dados produzidos pelas 
avaliacoes devem ser de dominio publico, e nao ficar retidos como recursos de 
poder nas agendas avaliadoras. Tanto quanta possivel, as avaliacoes nao 
devem ser linicas, mas produzidas por diferentes agendas, com criterios e 
metodologias proprias, respondendo distintas setores - estudantes, associacoes 
profissionais, governos, conselhos de reitores, federacoes de escolas; e estas 
agendas devem prestar contas, de forma responsavel, as diferentes 
comunidades a que devem atender. 
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